Text Knows What, Tables Know When: Clinical Timeline Reconstruction via Retrieval-Augmented Multimodal Alignment
文本知何事,表格知何时:检索增强多模态对齐实现临床时间线重建
🧭 检索增强多模态对齐 · 时间线重建
Carnegie Mellon University
用检索到的结构化EHR表格校准临床文本时间线,多模态对齐提升绝对时间精度并发现34.8%事件仅存于文本。
📌 工作参考价值(4 点)
- 检索增强校准的思路可迁移至电商用户行为时间线构建:将非结构化评论/日志中的事件与结构化交易时间戳对齐,提升用户旅程建模精度。
- 图结构多步流程(锚事件骨架→非中心事件相对放置→外部证据校准)可泛化为通用多模态融合范式,适用于推荐系统中异构数据的时间对齐。
- AULTC(绝对时间标签准确度)指标可直接用于评估推荐场景下用户行为序列的时间预测质量。
- 发现大量文本事件缺失于结构化记录,提示在生成式推荐中需重视非结构化信号的独立价值,避免仅依赖结构化数据遗漏关键行为。